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Diese Erfindung betrifft das Gebiet der Information an den 
Fahrer und der Unterstiitzung beim Fahren eines Stra|3enf ahr- 
zeugs durch Ausgabe von Inf ormationen und Alarms ignalen an 
den Fahrer im Falle einer unnormalen Ortung oder Bewegung des 
Fahrzeugs auf der Straj3e. 

Sie macht sich die Tatsache zunutze, da/3 heute die meisten 
Stra(3en eine Zeichengebung am Boden aufweisen, die auf minde- 
stens fiinfzehn Meter vor (und eventuell hinter) dem Fahrzeug 
zu erkennen 1st. 

Diese Zeichengebung ist leider haufig stellenweise abgenutzt 
und kann mit Beschadigungen der Fahrbahn oder des Randstrei- 
fens verwechselt werden, und sie ist haufig unterbrochen, so 
da£ es auf den ersten Blick den Anschein hat, da/3 jegliches 
Stiitzen auf diese Zeichengebung entweder einen sehr hohen An- 
teil an falschen Alarmen zur Folge hat oder in vielen Fallen 
nicht funktioniert . 

Es wurde jedoch bereits eine Vorrichtung und ein Ver fahren 
gema/3 den Hauptbegrif f en von Anspruch 1 bzw. 7 (JP-A-1- 
83423) vorgeschlagen • 

Desgleichen wurde eine Vorrichtung vorgeschlagen (IEEE TRAN- 
SACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, Band 
10, Nr. 3, Mai 1988, New York US; MATTHEW A. TURK U. A,: 
'VITS - A Vision System for Autonomous Land Vehicle 
Navigation'), mit der wahrend einer Bearbeitungs-Endphase das 
Bild einer Kamera wiederherzustellen, die unter Berucksichti- 
gung der Perspektive gehalten wird. 

Die Erfindung hat insbesondere zur Aufgabe, eine Bordvorrich- 
tung fur ein Stra/3enf ahrzeug zu schaffen, mit der die Posi- 



tion des Fahrzeugs auf der Strafe auf Grundlage von Daten, 
die die Umgebung darstellen, verfolgt werden kann. 

Zu diesem Zweck schlagt die Erfindung insbesondere eine Vor- 
richtung gema/3 Anspruch 1 vor. 

Die Vorrichtung kann so vorgesehen sein, dap sie nur ein ein- 
ziges Bild berucksichtigt , das die Lage in einem gegebenen 
Zeitpunkt darstellt, oder besser die Entwicklung iiber mehrere 
Bilder hinweg berucksichtigt f was auJJer im Stadtbereich oder 
bei sehr langsamem Verkehrsf lu/3 moglich ist, 

Bei einer vorteilhaf ten Ausf iihrungsart besitzt die Vorrich- 
tung Sensoren fur Fahrparameter , insbesondere des Zustands 
der Richtungswechselanzeiger (Blinker), sowie Anzeigemittel 
fur den Fall der Nichtiibereinstimmung zwischen der wirklichen 
Fahrzeugsituation und den von den Sensoren abgegebenen Signa- 
len. 

Die Vorrichtung kann in einer mehr oder weniger erweiterten 
Form ausgefiihrt sein, wobei sie eine mehr oder weniger voll- 
standige Fahrhilfe bietet. 

In einer einfachen Ausf uhrungs form ist die Vorrichtung so 
vorgesehen, dap sie nur in einem sogenannten Inf ormationsmo- 
dus funktioniert, indem sie dem Fahrer eine Information be- 
ziiglich der seitlichen Position des Fahrzeugs und dessen 
Ortsbestimmung in Bezug zu der verfolgten Bahn anbietet. 

Dieser Inf ormationsmodus kann durch die Erzeugung von Alarm- 
signalen in unnormalen Situationen erweitert werden. Diese 
Situation kann durch Auswertung des Bildes zu einem gegebenen 
Zeitpunkt und der von den Sensoren fur Fahrparameter zum 
gleichen Zeitpunkt, d. h. wahrend des gleichen laufenden Zy- 
klus gelieferten Signale identif iziert werden: insbesondere 
kann ein solches Alarms ignal bei Beginn des liber fahrens einer 
durchgezogenen Linie oder bei zu hoher Geschwindigkeit im 
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Verhaltnis zu der Kriimmung einer Kurve, die von der Kamera 
vor dem Fahrzeug aufgezeigt wird, gegeben werden. 

Weitere Alarmsignale konnen einer Situation entsprechen, die 
es erfordert, eine Korrelation zwischen Parametem, die wah- 
rend des aktuellen Zyklus erf apt werden (entsprechend der 
Auswertung eines Bildes), und Parametem Oder Ereignissen, 
die wahrend eines vorherigen Zyklus erfafit und gespeichert 
wurden : dadurch kann beispielsweise die Ausgabe eines Warn- 
signals verhindert werden, wenn bei anhaltendem Aktivzustand 
der Blinker ein Uberqueren einer unterbrochenen Linie Oder 
ein Abbiegen der Fahrzeuge durch Einwirken auf das Lenkrad 
innerhalb einer bestimmten Zeitdauer stattfindet. 

Das Alarms ignal kann optisch oder akustisch, ja sogar ki- 
nesthetisch sein. Es konnen mehrere Alarmstuf en vorgesehen 
sein, die mehr oder weniger dringlich sind, urn bei ausblei- 
bender Reaktion des Fahrers nacheinander aktiv zu werden , wo- 
bei die dem Fahrer auf das Alarmsignal jeder Stufe hin zuge- 
billigte Reaktionszeit ein fiir alle Mai oder dynamisch in Ab- 
hangigkeit von den Fahrcharakteristika festgelegt wird- 

Die Vorrichtung kann auch so vorgesehen sein, da£ sie einen 
"aktiven" Betriebsmodus hat, wobei das Umschalten in den Ak- 
tivmodus und aus dem Aktivmodus durch den Kontroller gesteu- 
ert wird. Die Vorrichtung leistet damit eine wirkliche Hilfe 
beim Fahren. Dies bedeutet, dap sie durch Betatigungsvorrich- 
tungen erweitert wird, durch die beispielsweise eine zeitwei- 
lige Richtungskontrolle moglich wird, urn die Richtung zu 
steuern, um das Fahrzeug in der Mitte der durch Markierungs- 
streifen am Boden eingegrenzten Fahrbahn zu halten und um dem 
Fahrer die Anstrengung des Gegenhaltens gegen Seitenwind zu 
ersparen; der Aktivmodus kann auch fiir weitere Funktionen 
vorgesehen sein, beispielsweise dazu, eine vom Fahrer angege- 
bene Geschwindigkeit zu halten, sie jedoch zu drosseln, wenn 
die Auswertung des von der Kamera gelieferten Bildes das Vor- 
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handensein von Kurven mit kleinem Radius vor dem Fahrzeug an- 
zeigt . 

Schlie£lich kann die Vorrichtung durch zusatzliche Sensoren, 
insbesondere fiir die Position des Lenkrades, und durch ein 
Programm, durch das sie in einem "Wachsamkeitskontrollmodus " 
zu nennenden Modus arbeiten kann, erweitert werden, wodurch 
Ermiidung oder Einschlafen des Fahrers erkannt werden kann. 
Die nachlassende Aufmerksamkeit kann durch Verfolgen der 
Fahrcharakteristika bei einem bestimmten Fahrer und durch 
Vergleich der Entwicklung mit bekannten und gespeicherten 
Folgen des Einschlafens erkannt werden, Jeder bestimmte Fah- 
rer hat im normalen Wachzustand eine ihm eigene Fahrweise, 
die durch ihre raumlichen und zeitlichen Charakteristika 
identif iziert werden kann ( durchschnittliche Position des 
Fahrzeugs in seiner Spur bei gerader Strecke, Art der Abwei- 
chung von der durchschnitt lichen Position, Amplitude und Ab- 
lauf der Richtungskorrekturbewegungen des Fahrzeugs beim 
Beenden einer Kurve, Reaktionszeit bei Beginn einer Kurve 
usw. ) . Diese Charakteristika werden durch das Einschlafen 
verandert: Beispielsweise neigt der ermudete oder einschla- 
fende Fahrer dazu, in der Mitte der Strape zu fahren, sein 
Fahrzeug abdriften zu lassen und abrupt wieder in die rich- 
tige Richtung zuriickzulenken. Eine solche Uberwachung kann 
insbesondere durch ein Programm von der Art eines Lern-Fach- 
systems er folgen. 

Urn die Vorrichtung effektiv zu machen, ist es erf orderlich, 
da£ sie nur einen geringen Prozentsatz falscher Alarme auf- 
weist und daJ3 jede Betriebsstorung oder Ausfall dem Fahrer 
sofort zur Kenntnis gebracht wird. Die zweite Bedingung be- 
deutet im allgemeinen, dap die Vorrichtung mit einem Eigen- 
diagnoseprogramm ausgestattet werden mu£, das sie in regel- 
mSlpigen Abstanden auf einwandf reien Betrieb iiberpriift, bei- 
spielsweise mittels Korrelation zwischen den von der Kamera 
und von den verschiedenen Sensoren gelieferten Signalen und 
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Vergleich mit den Wahrscheinlichkeitskriterien. Bei einer 
Fahrhilfe- 

Vorrichtung, die in den Aktivmodus geschaltet werden kann, 
mu0 jeder Ausfall einer Betatigungsvorrichtung eine Reaktion 
im Sinne der Sicherheit bewirken, ob es sich nun um die Beta- 
tigung oder das Festhalten des Lenkrads Oder um die Steuerung 
der Geschwindigkeit handelt. 

Die Vorrichtung, die im Aktivmodus arbeiten kann, kann so 
vorgesehen sein, da/3 das Ignorieren eines Warns ignals einen 
Eingriff auf die Geschwindigkeit und/oder Richtung des Fahr- 
zeugs zur Folge hat. Die Vorrichtung ist jedoch so vorgese- 
hen, daJ3 der Fahrer in alien Fallen die automatische Funktion 
ausschalten kann, insbesondere um eine Notsituation zu bewal- 
tigen. 

Die Erfindung schlagt ferner ein Verfahren zur Ermittelung 
und Verfolgung der Position eines auf einer Stra/3e fahrenden 
Fahrzeugs vor, das dadurch gekennzeichnet ist, dap 

- das Bild eines vor dem Fahrzeug befindlichen Bereichs der 
Strape hergestellt wird, der Markierungsstreif en am Boden 
aufweist, die mindestens eine Fahrspur abgrenzen, 

- das Bild gefiltert wird, um nur die Elemente zu erhalten, 
die den Spurbegrenzungsstreif en entsprechen, 

- das gefilterte Bild in der Ebene des Bodens durch Kompensa- 
tion der Perspektivwirkungen und geometrische NSherung rekon- 
struiert wird, 

- die Fragmente auf einanderf olgender Linien, die den Streifen 
entsprechen, aneinandergekettet werden, um die Spur im Ver- 
haltnis zur Position des Fahrzeugs modellhaft darzustellen, 
und 



- die Position des Fahrzeugs angezeigt wird Oder ein Warns i- 
gnal ausgeldst wird, wenn die Modelldarstellung eine unnor- 
male Situation ergibt. 

Die Erfindung geht naher aus der folgenden Beschreibung einer 
besonderen Aus fuhrungs form hervor, die als nicht einschran- 
kendes Beispiel erfolgt. In der Beschreibung wird Bezug auf 
die beigefugten Zeichnungen genommen, wobei 

- Fig. 1 ein Einbauschema fur die Kamera einer erf indungsge- 
ma0en Vorrichtung an einem Fahrzeug zeigt, 

- Fig. 2 ein Funktionsschaltbild eines moglichen Aufbaus ei- 
ner Vorrichtung zeigt, die im Uberwachungsmodus und eventuell 
im Wachsamkeitskontrollmodus arbeiten kann, 

- Fig. 3 den Verlauf des von einer Kamera wie in Fig. 1 ge- 
lieferten Bildes bei zwei Ausrichungen und zwei verschiedenen 
Brennweiten zeigt, 

- die Figuren 4A-4E auf einanderf olgende Schritte der Bearbei- 
tung eines von der Kamera von Fig. 1 gelieferten Bildes zei- 
gen, 

- die Figuren 54A, 5B, 5C das Herausholen der Mittelpunkte 
der Markierungsstreifen am Boden aus der Verteilung der Hel- 
ligkeit L auf einer Abtastungslinie x der Kamera zeigen, 

- die Figuren 6 und 7 Schemata des Funktionsprinzips bei der 
Ermittlung der Strafe bzw. bei der Verfolgung der Straf3e zei- 
gen, 

-Fig. 8 einen Grundlogikplan eines erf indungsgema/3en Verfah- 
rens zur Verfolgung einer Strafe und zur Fahrhilfe zeigt, 

-Fig. 9 ein mogliches Schema des Moduls zur Modellerf assung 
der Spur zeigt, auf der das Fahrzeug fahrt, 



- die Figuren 10, 11 und 12 Logikplane von Modulen zur Erken- 
nung, Verfolgung und Modelldarstellung, die in dem Verfahren 
zur Anwendung kommen. 

Zunachst wird der Grundaufbau einer erf indungsgemapen Vor- 
richtung und die wesentlichen Funktionscharakteristika be- 
schrieben, dann folgt die detaillierte Beschreibung eines Ab- 
lauf diagramms - 

Das Haupteingabeteil der Vorrichtung besteht aus einer Kamera 
10 (Fig. 1) zur Bereitstellung eines Bildes von der Strafe 
vor dem Fahrzeug 12, die durch eine Kamera zur Bereitstellung 
eines Bildes von Angaben bezuglich der Situation hinter dem 
Fahrzeug 12 erganzt werden kann. Es wird im allgemeinen eine 
Matrixkamera oder sogenannte CCD- 

Kamera verwendet, die im Inf rarotbereich aufnimmt, wodurch 
die Gefahr der Verwechselung von UnregelmaJ3igkeiten der 
Strape mit der Bodenmarkierung verringert wird. Im iibrigen 
gibt es CCD-Kameras zu akzeptablen Preisen. 

Bei der einfachsten Ausf uhrungsf orm gibt der Prozessor eine 
Warninformation an ein akustisches oder optisches Anzeigege- 
rat 30 ab. Er kann auch auf einem Anzeigebildschirm 32 die 
Position des Fahrzeugs auf der Stra/3e angeben. 

In der Praxis verlangt die erf orderliche Rechenlei stung einen 
Prozessor mit einem Rechner, der einem IBM-PC des Typs PCI 
386 gleichwertig ist, mit einer programmierbaren Karte zur 
Rechenbeschleunigung MATROX PG 1280 zur Erfassung und zur Be- 
arbeitung des Bildes . 

Die Kamera muJ3 ein ausreichendes waagerechtes Feld haben, urn 
die Seitenlinien, die eine Fahrspur eingrenzen, erscheinen zu 
las sen. Die Wahl der Kameraneigung a ergibt sich aus einem 
Kompromi/3: Eine nach unten gerichtete Kamera mit kurzer 
Brennweite ergibt ein Feld der in Fig. 3 mit 14 dargestellten 
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Art mit hoher Prazision der seitlichen und winkelma/3igen Po- 
sitionierung der Linien wie 16 und 18 in der Nahe des Fahr- 
zeugs, jedoch mit geringer Prazision auf Entfernung. Eine Ka- 
mera, die naher an der Horizontalen ausgerichtet ist und eine 
grofie Brennweite hat, ergibt eine bessere Prazision der ent- 
fernteren Stra£enbereiche, jedoch auf Kosten der Prazision 
beziiglich der Position des Fahrzeugs, wie mit 20 angegeben. 

In der Praxis ist es erf orderlich, ein zuf riedenstellendes 
Bild iiber eine Distanz a (Fig. 4A) zu erhalten, die von eini- 
gen Metern, gewohnlich 2 bis 4 Metern, bis zu etwa zwanzig 
oder drei/3ig Metern reicht. 

In Fig. 3 ist zu sehen, dap durch die Perspektive die Begren- 
zungsstreif en der Fahrspuren eine Anzahl von Pixel pro bild- 
schirmartiger Abtastungslinie darstellen, die in dem Ma/3e ab- 
nimmt, wie der Abstand zum Fahrzeug zunimmt . Uberdies haben 
diese Streifen einen unregelma/3igen Verlauf . Die Bildbearbei- 
tungsalgorithmen beriicksichtigen diese Phanomene. 

Die Kamera 10 ist im allgemeinen mit einer automatischen 
Blendeneinstellung in Abhangigkeit von den Schwankungen der 
Lichtverhaltnisse ausgestattet . Es ist haufig zweckma/3ig r ein 
Polarisations filter vor der Optik vorzusehen. Die Kamera kann 
an dem Fahrzeug beispielsweise im Innenraum an der iiblichen 
Stelle fiir einen Ruckspiegel oben an der Windschutzscheibe 
installiert werden. 

Die erforderlichen Komponenten fiir eine Vorrichtung zum Er- 
mitteln und Verfolgen der Position des Fahrzeugs umfassen ne- 
ben der Kamera 10 und einem Analog-Digital-Umsetzer 22 bei 
einer Kamera, die die Inf orraationen in analoger Form abgibt, 
Mittel zur Datenverarbeitung, die mindestens aus einem Pro- 
zessor 24, einem Lebendarbeitsspeicher 26 (mit ausreichender 
Kapazitat, um die Charakteristika mehrerer Bilder aufzuneh- 
men, wenn die Fortentwicklung der Szene verwendet wird) und 
einem Massespeicher 28 mit einem Programm zur Durchfiihrung 
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von Bearbeitungsalgorithmen besteht. Diese Algorithmen konnen 
ausf iihren: 

- das Filtern und die Binarisierung des von der Kamera kom- 
menden Bildes , urn nur die Elemente zu erhalten, die den Spur- 
begrenzungsstreifen entsprechen (unterbrochene und durchlau- 
fende Linien) , 

- die Rekonstruktion des bearbeiteten Bildes in der Ebene des 
Bodens, d. h. die Kompensation der Perspektivwirkungen und 
eine (kreisf ormige oder sonstige) Naherung, durch die die Un- 
regelmapigkeiten der wirklichen Linienf iihrung auf der Strafie 
geglattet werden konnen, 

- das schrittweise Verketten der Linienf ragraente . 

Zur Abgabe eines Alarms durch Vergleich weist die Vorrichtung 
desgleichen Fahrparametersensoren 33 wie z. B. die unten de- 
f inierten auf . 

Zur Ermittlung der Charakteristika der StraJ3e mu/3 der gesamte 
Vorgang durchgefiihrt werden. Die weitere Verfolgung kann in 
Anbetracht der Kontinuitat der Linien, die es ermoglicht, auf 
Grundlage der Position, der Ausrichtung, der Breite und der 
Krummung der zuvor identif izierten Linien bei einer geniigend 
raschen Folge der Zyklen (mehr als 10 Hz) einen Voraussage- 
Algorithmus zu verwenden, vereinfacht werden. 

Die auf einanderf olgenden Schritte eines Identif izierungspro- 
zesses sind in einem Beispiel in den Figuren 4A bis 4E sche- 
matisch dargestellt. 

Fig. 4A zeigt ein Beispiel eines von der Kamera gelieferten 
Bildes . Die auf einanderf olgend durchgef iihrten Vorgange werden 
spater im einzelnen beschrieben. 
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Es werden nun die auf einanderf olgenden Arbeitsschritte be- 
schrieben, die an einem solchen Bild durchgefiihrt werden. 

Der erste durchzuf uhrende Arbeitsschritt besteht in einem 
Filtern und Binarisieren, wodurch die Bereiche mit groJ3erup 
Leuchtdichte auf Linien zuriickgefiihrt werden konnen, die mit 
hoher Wahrscheinlichkeit Streifen am Boden darstellen. 

Eine zuf riedenstellende Losung, bei der beriicksichtigt wird, 
da|3 die gesuchten Elemente Streifen mit starker Leuchtkraft 
und einer Ausrichtung sind, die im Bild nahe an die Senk- 
rechte herankonunt , besteht darin, ein Filtern durchzuf iihren, 
das allein auf den Abtastlinien eines Bildes beruht, wobei 
ein Markierungsstreifen sich als eine Leuchtdichtespitze dar- 
stellt. 

Fig. 5A zeigt ein Beispiel fur die Leuchtdichteanderung in 
der quer zur StrajSe verlaufenden Richtung x (d. h. in einer 
Bildschirm-Abtastlinie) . Jeder der Streifen erscheint als 
eine Spitze 34 (Fig. 5A) . Durch das vorhandene Fahrzeug kann 
ein zusatzlicher Bereich mit grower Leuchtdichte 36 erzeugt 
werden • 

Jede Bildlinie entspricht einem quer verlaufenden Bodenab- 
schnitt, der sich in einem festen und bekannten Abstand vor 
der Kamera befindet, wo die Perspektivwirkung konstant ist. 
Bei einer gegebenen Abtastlinie ist die Breite der durch 
einen Bodenmarkierungs streifen erzeugten Leuchtdichtespitzen 
im wesentlichen konstant und auf alle Falle kleiner als eine 
maximale Breite , wodurch es moglich wird f die Extremintensi- 
taten iiber eine zu gro|3e Breite zu vermeiden. 

Das Filtern kann daher durch eine Normierung erfolgen, die 
darin besteht , bei jedem Pixel einen Wert herauszuholen, der 
gleich der durchschnittlichen Leuchtdichte in einem Bereich 
mit der Breite 212 ist, der sich beiderseits eines Fensters 
mit der Breite 11 befindet f welches auf das betreffende Pixel 



P zentriert ist (Fig. 5A) . Bei diesem Filtern, das darauf 
hinauslauft, die gleichbleibende Komponente der Leuchtdichte 
um das Fenster mit der Breite 11 abzuziehen, werden die Spit- 
zen mit einer geringeren Breite als 11 durchgelassen und die 
breiteren Spitzen abgeschwacht . 

Dies hat ein Signal mit dem in Fig. 5B gezeigten Verlauf zur 
Folge. Die Spitzen, die den Streifen entsprechen, konnen dann 
durch Vergleich mit einem geeigneten Schwellenwert S identi- 
fiziert werden. Die Streif enmitten 38 konnen dann durch 
Schwerpunktsberechnungen mittels herkommlicher Algorithmen 
und/oder durch Verketten von Punkten, die entlang der Bild- 
spalten nahe beieinander liegen, identif iziert werden. 

Auf diese Weise erhalt man die Mitten der Streifen in jeder 
Bildlinie auf ein Pixel genau, sowie die Linien, die an sie 
angrenzen. Bei Ende des Filterns und Binarisierens ist das 
verfiigbare Bild auf die in Fig. 4B gezeigten Inf ormationen 
reduziert . 

Dann wird ein Rekonstruktionsvorgang in der Ebene des Bodens 
durchgefiihrt r wobei die Neigung a der optischen Achse der Ka- 
mera berlicksichtigt wird (Fig. 1) . 

Die Koordinaten x und y jedes Pixels in der Ebene z = 0 sind 
durch einfache mathematische Formeln als Funktion der Koordi- 
naten xi, yi in der Bildebene, trigonometrische Funktionen 
von a und optische Parameter der Kamera gegeben. 

Bei Ende dieses Vorgangs ergibt sich eine Darstellung der in 
Fig. 4C gezeigten Art, bei der die Perspektivwirkungen elimi- 
niert wurden und die wirkliche Position der Linien in Bezug 
zu dem Ort 12a des Fahrzeugs zur Verfiigung steht. 

Der folgende Vorgang besteht in einem Verketten, das die Kon- 
tinuitat der Linien durch Naherung, beispielsweise bei einem 
Kreisbogen durch die Methode der kleinsten Fehlerquadrate, 
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wieder herstellt. Die Liniena±>schnitte werden anhand von Ko- 
harenzkriterien miteinander verglichen, urn die unterbrochenen 
Striche, die den unterbrochenen Streifen auf der StraJ3e ent- 
sprechen, in einer einzigen Linie miteinander zu verschmel- 
zen. Jede erhaltene Linie wird nun durch ein Modell darge- 
stellt (Fig. 4D) , das durch mehrere Parameter gekennzeichnet 
ist: 

- Radius und Mitte der Kurve, 

- Position und Ausrichtung der Kamera (d. h. y = 0), 

- Lange (identif iziert durch den Anfang und das Ende) . 

Schlief31ich werden die Linien, die nicht den vorher bestimm- 
ten Koharenzkriterien entsprechen, beispielsweise diejenigen, 
die einem senkrechten Verkehrszeichen entsprechen, eliminiert 
(Fig. 4E). 

Bei Ende der Bearbeitung sind die signif ikativen Linien und 
ihre Position zum Fahrzeug wahrend eines Abtastzyklus der Ka- 
mera verfugbar. 

Um eine vollstandigere Auswertung der Daten zu ermoglichen, 
weisen die Bearbeitungsmittel im allgemeinen einen Bildspei- 
cher auf , der mehrere auf einanderf olgende, gemap Fig. 4E als 
Modell dargestellte Bilder speichern kann. 

Alle obengenannten Vorgange werden in einer Ermittlungsphase 
durchgefiihrt, bei der die Charakteristika der StraJ3e erkannt 
werden sollen f wobei die Linien r die einen Spurbegrenzungs- 
streifen darstellen, getrennt ermittelt werden. Es kann nam- 
lich gro(3e Abstandsunterschiede zwischen den Streifen geben f 
je nachdem ob man sich auf einer Autobahn oder auf einer 
Landstrafte befindet. 

In der Vorrichtung kann ein Anzeiger mit manueller Betatigung 
vorgesehen werden, mit dem der Fahrer angeben kann, ob er 
sich auf einer Autobahn oder auf einer Landstrafie befindet. 
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Dies erleichtert dann die Ermittlung, da eine Autobahnstrecke 
durch zwei parallele Linien rechts und links und durch ahnli- 
che Kurven gekennzeichnet ist, deren Abstand in einem Bereich 
von genormten Werten liegt, Auf einer Landstraf3enstrecke gibt 
es als Markierung nur die Mittellinie. 

Ohne manuellen Anzeiger wird die Ermittlung des LandstrafSen- 
typs automatisch aktiviert, wenn innerhalb eines bestimmten 
Zeitraums keine Autobahnspur erkannt werden konnte. Die 
Breite der Fahrspur wird dann willkiirlich von der Mittellinie 
aus festgesetzt, z. B. auf 3,30 Meter, d. h. auf einen Wert, 
der den meisten Situationen entspricht. 

Die Ermittlung der Parameter der Stra£e kann gemap dem Ab- 
laufdiagramm von Fig. 6 erfolgen: Ortsbestimmung der Linien, 
von denen angenoramen wird, da/3 sie Bodenmarkierungsstreif en 
darstellen, und Speicherung. Von diesem Zeitpunkt an gibt ein 
Voraussage-Algorithmus den erwarteten Ort an und ermoglicht 
durch Vergleich, die Gultigkeit der ersten Erkennung zu iiber- 
priifen. Die Liste der erhaltenen Linien wird in einen Spei- 
cher ubertragen, von dem aus die Ermittlung der Strafe durch 
regelma^ige Abfrage erfolgt. Sobald die Strafe identif iziert 
ist, werden ihre Parameter gespeichert. 

Sobald die Stra£e erkannt ist, werden die berechneten und ge- 
speicherten Parameter in ihrer Fortentwicklung verfolgt. Die 
Bearbeitungssequenz ist dann die in Fig. 7 angegebene. Der 
mit 40 gekennzeichnete Voraussageschritt besteht darin, Para- 
meter der Position, der Richtung von Kurven und des Abstands 
zwischen den Linien, die die Fahrspur abgrenzen, mit tiberprii- 
fung des Kriteriums der Parallelitat zu bestimmen. Die Iden- 
tifizierung der rechten und/oder linken Linie in dem neuen 
bearbeiteten Bild ermoglicht es, eine Darstellung wie die in 
Fig. 4E gezeigte beizubehalten. 

In dem Mape, wie das Kamerafeld eine Fahrspur abdeckt, die 
sich links und/oder rechts von der Fahrspur befindet, die das 
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Fahrzeug einnimmt, werden die ent spree henden Markierungs- 
streifen erst nachher ermittelt. Es handelt sich namlich da- 
bei urn Linien, die weiter von der Achse entfernt sind und da- 
her starker von Storungen betroffen sind. Diese Erfassung der 
seitlichen Spuren ist fur die Verwaltung der vom Fahrer 
durchgef iihrten Spurwechsel von Nutzen. 

Sobald diese Vorgange erfolgt sind, kann die Verwaltung der 
Alarme durch einfache Vergleichsoperationen erfolgen, z. B.: 

- Ausgabe eines Alarms der ersten Stufe oder Warns ignals bei 
beginnendem Uberfahren eines unterbrochenen Streifens nach 
links, wenn zuvor die linken Blicker nicht eingeschaltet wur- 
den, 

- Alarm der zweiten Stufe bei Uberqueren einer durchgehenden 
Linie nach rechts ( Groflbritannien) oder nach links (Fest- 
land) , 

- Alarm der ersten Stufe bei Uberschreiten der Geschwindig- 
keit von 90 km/h auf einer Strecke, die als Lands tratfe iden- 
tifiziert wurde. 

Diese Beispiele sind selbstverstandlich in keinerlei Weise 
einschrankend • 

Fig, 8 zeigt verschiedene Sequenzen, die bei der Durchfiihrung 
des Verfahrens eintreten, wenn dieses dazu vorgesehen ist, 
eine Fahrhilfe und nicht nur eine optische Anzeige der Posi- 
tion und Bewegung des Fahrzeugs zu leisten. 

Mit Initialisierung des Verfahrens findet einerseits eine Er- 
fassung des lokalen Modells der Strecke, wie in Fig. 6 ange- 
geben, und andererseits eine Erfassung der f ahrzeuginternen 
Parameter statt. 
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Wahrend der Erf as sung des lokalen Modells der Strecke findet 
eventuell eine Bestimraung und Speicherung der Parameter 
statt, die zur Kennzeichnung des Modells ausreichen, d. h. : 

- der Betriebszustand ides Systems zur Messung der Fahrzeugpo- 
sition (Ermittlung der Stra£e Oder Verfolgung der Stra/3e) , 

- die seitliche Position der Kamera zur Spur (d. h. der Ab- 
stand der Kamera von dem rechten und linken Streif en) , 

- die Breite der Spur, 

- die Ausrichtung der Kamera zur Spur, 

- der Kurvenradius und die Kurvenrichtung der Spur, definiert 
durch den Streifen oder die sie begrenzenden Streifen, 

- die Art der Markierung der linken Linie und eventuell der 
rechten Linie . 

Gleichzeitig werden die zu erfassenden f ahrzeuginternen Para- 
meter durch mindestens die ersten der folgenden Parameter ge- 
bildet: 

- Zustand des rechten und des linken Richtungsanzeigers , 

- Einschlagwinkel des Lenkrads, 

- Geschwindigkeit des Fahrzeugs, 

- Beschleunigung, bestimmt durch die Stellung des Gaspedals 
oder die der Drosselklappe, 

- Bremsung (Stellung des Bremspedals, Bremsdruck oder Verzo- 
gerungsdruck) , 

- eingelegter Gang. 

Die Lernvorgange , die bei der Erstellung des lokalen Modells 
der Strecke stattfinden (wahrend bestimmte Daten feststehen, 
wie z. B. die Ausrichtung der Kamera), konnen gemaj3 dem Ab- 
laufdiagramm von Fig- 9 erfolgen, das zu Fig. 6 vergleichbar 
ist. Die Ausrichtung der Kamera kann ebenfalls durch einen 
Lernvorgang bestimmt werden, ausgehend von der Parallelitat 
der betrachteten Spurmarkierungen . Durch dieses Verfahren 
konnen die Unterschiede in der Trimmlage aufgrund unter- 
schiedlicher Belastung des Fahrzeugs bedeutungslos gemacht 
werden . 



t 



- 16 - 

Das Mefimodul, das in dem in Fig. 9 gezeigten Logikplan zur 
Erfassung zum Einsatz kommt, kann das von Fig. 10 sein, wo 
sich die Vorgange wiederf inden, die in den Figuren 4B bis 4E 
dargestellt sind. 

Das Modell der Spurverf olgung Oder Verfolgung der Spur, das 
nach Bestatigung der Messung zum Einsatz kommt, kann den in 
Fig. 11 gezeigten Aufbau haben, mit Riickkehr zur Messung bei 
fehlender Oder verlorengegangener Korrelation. 

Das Modul zur Modellisierung der Fahrzeug- und Fahrercharak- 
teristika seinerseits kann den in Fig. 12 gezeigten Aufbau 
haben . 

Die Erfindung ist nicht auf die oben als Beispiel beschriebe- 
nen besonderen Ausf iihrungsarten beschrankt. Sie kann zahlrei- 
che Varianten innerhalb des Rahmens von Aquivalenzen aufwei- 
sen, die eine mehr oder weniger umf angreiche Unterstiitzung 
bieten. 
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Anspriiche 

1. Bordvorrichtung fur Strapenf ahrzeuge zur Ermittlung und 
Verfolgung der Position des Fahrzeugs zu Bodenmarkie- 
rungsstreifen, bestehend aus einer Kamera (10) zur Her- 
stellung eines Bildes von der Strafe vor dem Fahrzeug und 
aus Anzeige- oder Warnmitteln fiir den Fall einer unnorma- 
len Position des Fahrzeugs zu den Bodenmarkierungsstrei- 
fen, 

dadurch gekennzeichnet , dap sie auch einen programmierten 
Rechner (24-28) mit Mitteln zur Bearbeitung des Bildes 
aufweist, der tatsachlich eine Rekonstruktion des Bildes 
aus dem dreidimensionalen Bild ermoglicht, wobei die Per- 
spektive und die Neigung der Kamera berucksichtigt wer- 
den, um die wirkliche Position der Linien in Bezug zum 
Fahrzeug in der Bodenebene herzustellen, und es dann 
durch Anwendung von Wahrscheinlichkeitskriterien ermog- 
licht, die Markierungsstreif en (16, 18) zu identifizie- 
ren. 

2. Vorrichtung nach Anspruch 1, 

dadurch gekennzeichnet, dap die Vorrichtung auch Sensoren 
(33) fiir Fahrparameter aufweist, wobei die genannten 
Warnmittel bei Nichtubereinstimmung der wirklichen Fahr- 
zeuglage bezogen auf die Streifen mit den von den Senso- 
ren abgegebenen Signalen, die eine unnormale Position an- 
zeigend, ein Warns ignal abgeben. 

3. Vorrichtung nach Anspruch 2, 

dadurch gekennzeichnet, dap die Vorrichtung so vorgesehen 
ist, da/3 sie bei Uberfahren eines unterbrochenen Strei- 
fens ohne vorheriges Einschalten des entsprechenden Rich- 
tungswechselanzeigers Oder bei Uberfahren einer durchge- 
henden Linie ein Warns ignal aus 16s t. 
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Vorrichtung nach einem der vorherigen Anspriiche, 
gekennzeichnet durch Mittel, um die Richtung zu steuern 
und das Fahrzeug in der Mitte der von den Bodenmarkie- 
rungsstreif en eingegrenzten Spur zu halten, die vom Fah- 
rer abgeschaltet werden konnen. 

Vorrichtung nach einem der vorherigen Anspruche, wobei 
der Rechner ein Programm nach der Art eines Lern-Fachsy- 
stems aufweist, das die Fortentwicklung der Fahrcharakte- 
ristika zwischen auf einanderf olgenden Bildern bestimmt 
und eine Entwicklung, die einen Zustand des Einschlafens 
oder der Ermiidung darstellt, erkennt. 

Vorrichtung nach einem der vorherigen Anspriiche, 
daduxch gekennzeichnet, da£ die Kamera (10) mit Mitteln 
zur Ausrichtung durch einen Lernvorgang ausgehend von der 
Erscheinung der parallelen Markierungen iiberwachter Spu- 
ren versehen ist . 

Verfahren zur Ermittelung und Verfolgung der Position ei- 
nes auf einer Strafe fahrenden Fahrzeugs, bei dem 

mit Hilfe einer Kamera das Bild eines vor dem Fahr- 
zeug befindlichen Bereichs der StraJ3e hergestellt 
wird, der die Bodenmarkierungsstreif en aufweist, die 
mindestens eine Fahrspur abgrenzen, und die Position 
des Fahrzeugs zu den Streifen bestimmt wird oder bei 
unnormaler Position ein Warnsignal ausgelost wird, 

dadurch gekennzeichnet, daJ3 

das hergestellte Bild gefiltert wird, um nur die Ele- 
mente zu erhalten, die den Spurbegrenzungsstreif en 
entsprechen, 
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das gefilterte Bild in der Ebene des Bodens durch 
Kompensation der Perspektivwirkungen und der Neigung 
der Kamera sowie durch geometrische Naherung rekon- 
struiert wird, und 

die Fragmente auf einanderf olgender Linien, die den 
Streifen entsprechen, aneinandergekettet werden, urn 
ein Modell der Spur im Verhaltnis zur Position des 
Fahrzeugs zu erzeugen, wobei die unnormale Situation 
durch das Modell angezeigt wird. 

8. Verfahren nach Anspruch 6, 

dadurch gekennzelchnet , dap das Bild in jeder bildschirm- 
artigen Abtastlinie gefiltert wird, indem von der Leucht- 
dichte jedes Pixels die gleichbleibende Komponente der 
Leuchtdichte um ein Fenster herum, das das Pixel umgibt 
und der maximalen Abmessung des Bildes von dem Streifen 
in der betreffenden Abtastlinie entspricht, abgezogen 
wird, 

9. Verfahren nach Anspruch 6 Oder 7, 

dadurch gekennzeichnet, dap das Verketten zur Wiederher- 
stellung der Kontinuitat der Linien, die die Bodenmarkie- 
rungs streifen darstellen f durch Naherung beim Kreisbogen 
durch die Kethode der kleinsten Fehlerquadrate und durch 
Uberpriifung anhand eines Koharenzkriteriums erfolgt. 
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FIG.8. 
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Messung 



FIG.11. 



Bearbeitung des aktuellen Bildes durch 
Fiitern/Binarisieran: Herstallung der 
gewunscntan Element e (Pixel) 



I 



Verkettung der Pixel una Pro jektion/Re- 
Icons trukt ion in waagerechter 3D-Ebene 



Verkettung und kreisforaiige ModelUbildung 
der Linien und Linienelemente 



Correlation der recnten und linken fanrspur- 
aarkierenden Linie, in Vergleich zu den aus 
den vorher- Bildern vorausgesagt. Positionen 
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FIG.12 



Identiziziarung der Art der Umgebung (Kurve, 
Kurveaende, Xurvenbeginn, gerade Linie) aus 
dea lokaien Hodell der Strane 



Idencif izierung der Art des Hanovers in Fahrrichtung 
(Bremsen. Beschleunigen, konstante Geschwind.) und zur 
Seita (Spurvechsel. Ausweichen, Verfoigen d. Spur auf 
Basis incerner Parameter d. Fahrzeugs u* d„ lok. Hodells 



Zeltl. und ramaliche Kannzei earning von Paranetarn, die 
mlt dem Fahrer und dea Fahrzeug vernuaden siad, je nach 
den zuvor ideatif izierten Zustaadea 



